[アップデート] 210TBのSnowball Edge Storage Optimizedを注文できるようになりました

Snowball Edgeを使ってより高速にデータ転送を完了させたい場合に役立ちそう

#AWS Snowball Edge

#AWS

のんピ

2023.06.01

この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。

何個もSnowball Edgeを注文するの面倒だな

こんにちは、のんピ(@non____97)です。

皆さん何個もSnowball Edgeを注文するの面倒だなと思ったことはありますか? 私はあります。

一般的にデータ転送目的で使用されるSnowball Edgeである、Snowball Edge Storage Optimizedのストレージのサイズは80TBです。

しかし、80TB以上のデータを移行したいとなった場合こちらのSnowball Edgeを複数個注文する必要があります。

加えて、仮に複数個注文できたとしても、オンプレミスのポートの空きや電源容量によっては同時にマウントできるSnowball Edgeの数に制限があることもあります。

そういった点から「1つのSnowball Edgeでより大きいサイズのデータを転送できるようになればいいな...」と密かに願っていました。

その願いが通じたのか、210TBのSnowball Edge Storage Optimizedを注文できるようになりました。

こちらの追加されたSnowball Edgeについて確認してみたので紹介します。

変更点の確認

従来のSnowball Edge Storage Optimizedと比較をしましょう。

Item	従来のSnowball Edge Storage Optimized	210 TBのSnowball Edge Storage Optimized
CPU	40 vCPUs (AMD Naples, 32 cores, 3.4Ghz)	104 vCPUs (AMD Rome, 64 cores, 2 GHz)
RAM	80 GB	416 GB
HDD storage capacity	80 TB of usable	-
NVME storage capacity	-	210 TB usable (for object and NFS data transfer)
SSD storage capacity	1 TB SATA	None
Power	In AWS Regions in the US: NEMA 5–15p 100–220 volts. In all AWS Regions, a power cable is included	In AWS Regions in the US: NEMA 5–15p 100–220 volts. In all AWS Regions, a power cable is included
Power consumption	304 watts for an average use case, though the power supply is rated for 1200 watts.	304 watts for an average use case, though the power supply is rated for 1200 watts
Voltage	100 – 240V AC	100 – 240V AC
Frequency	47/63 Hz	47/63 Hz
Data and network connections	2x 10 Gbit – RJ45 1x 25 Gbit – SFP28 1x 100 Gbit – QSFP28	2x 10 Gbit – RJ45 1x 25 Gbit – SFP28 1x 100 Gbit – QSFP28
Cables	Each AWS Snowball Edge device ships country-specific power cables. No other cables or optics are provided. For more information, see Supported Network Hardware.	Each AWS Snowball Edge device ships country-specific power cables. No other cables or optics are provided. For more information, see Supported Network Hardware.
Thermal requirements	AWS Snowball Edge devices are designed for office operations, and are ideal for data center operations.	AWS Snowball Edge devices are designed for office operations, and are ideal for data center operations.
Decibel output	On average, an AWS Snowball Edge device produces 68 decibels of sound, typically quieter than a vacuum cleaner or living-room music.	On average, an AWS Snowball Edge device produces 68 decibels of sound, typically quieter than a vacuum cleaner or living-room music.
Weight	49.7 pounds (22.54 Kg)	49.7 pounds (22.45 Kg)
Height	15.5 inches (394 mm)	15.5 inches (394 mm)
Width	10.6 inches (265 mm)	10.6 inches (265 mm)
Length	28.3 inches (718 mm)	28.3 inches (718 mm)
Vibration	Non-operational use equivalent to ASTM D4169 Truck level I 0.73 GRMS	Non-operational use equivalent to ASTM D4169 Truck level I 0.73 GRMS
Shock	Operational use equivalent to 70G (MIL-S-901) Non-operational use equivalent to 50G (ISTA-3A)	Operational use equivalent to 70G (MIL-S-901) Non-operational use equivalent to 50G (ISTA-3A)
Altitude	Operational use equivalent to 0–3,000 meters (0–10,000 feet) Non-operational use equivalent to 0–12,000 meters	Operational use equivalent to 0–3,000 meters (0–10,000 feet) Non-operational use equivalent to 0–12,000 meters
Temperature range	0–45°C (operational)	0–30°C (operational)

参考 :

転送用途のストレージが80TBから210TBに増強されただけでなく、HDDからNVMeになっていたり、vCPU、RAMも大幅パワーアップしていたりと従来のSnowball Edge Storage Optimizedとは完全に別のデバイスですね。

Snowball Edge Storage Optimizedがパワーアップしたというよりかは、Snowball Edge Storage Optimizedの種類が増えたと捉えると良いと思います。

また、高温にちょっと弱くなりました。DC内では空調がついているので心配ないと思いますが、検証ルームなど空調が十分に整っていないエリアで使う場合は注意が必要そうです。

ストレージのサイズアップ以外の注目ポイントはストレージのタイプ変更ですね。

転送用途のストレージのタイプがHDDからNVMeに変更されたことにより、従来と比べて転送速度の改善が見込めますね。

With the increased storage capacity and higher performance NVMe drives, customers can now migrate 2PBs of data per month doubling the velocity of large migrations. In addition, customers may also benefit from applying proof-of-concept (POC) credits for AWS assisted PoC evaluation and data migration planning with Snow Large Data Migration Manager. Customers can use Amazon Simple Storage Service (Amazon S3) or NFS protocols to transfer data to the Snowball Edge 210TB devices.

(以下機械翻訳)

ストレージ容量の増加とNVMeドライブの高性能化により、お客様は月間2PBsのデータ移行が可能となり、大規模移行の速度が2倍になります。さらに、お客様は、AWSが支援するPoC評価とSnow Large Data Migration Managerによるデータ移行計画のための概念実証（POC）クレジットの適用も可能です。お客様は、Amazon Simple Storage Service (Amazon S3)またはNFSプロトコルを使用して、Snowball Edge 210TBデバイスにデータを転送することができます。

AWS Snow Family quickens multi-PB data migration with new 210TB device

しかし、細かいファイルが大量にかつディレクトリの階層が深いとプロトコルの処理がボトルネックとなります。その場合はNVMeの恩恵を十分に受けられないので、tarやzipで固めてS3 APIで転送してあげましょう。

S3 インターフェースの利⽤

抜粋 : 202208_AWS_Black_Belt_AWS_Snowball_Edge_Storage_Optimized P.19

その他にもNVMeのパフォーマンスをフルで発揮するために、「転送元サーバー - 操作端末 - Snowball Egde」を繋ぐネットワークのトラフィックにも注目すると良いでしょう。余裕があるのであれば並列にデータ転送の処理を行うのも良いです。

ペタバイト単位のファイル転送時の構成例がAWS公式ブログで紹介されていました。より速く転送を行いたい場合は参考にすると良いでしょう。

Snowball-Edge-Data-Migration-Tooling-and-Optimization-Summary

抜粋 : Snowball Edge を使用したデータ移行のベストプラクティス | Amazon Web Services ブログ

パフォーマンス改善のポイントは以下AWS公式ドキュメントにも記載されています。

使用できるリージョン

2023/6/1時点で使用可能なリージョンは以下2つです。

us-east-1 (バージニア北部)
us-west-2 (オレゴン)

東京リージョンはまだです。正座して待ちましょう。

お値段

お値段について確認します。

Snowball Edgeの料金ページを確認すると、「AWSセールスサポートにお問い合わせください」と書いてあり、料金表に具体的な金額は記載ありませんでした。

To learn about pricing for Snowball Edge Storage Optimized 210TB device for data transfer and to order a device contact AWS Sales support.

AWS Snowball Pricing | Amazon Web Services

vCPU数、RAMのサイズが近いGPU付きのSnowball Edge Compute Optimizedの東京リージョン価格が$2,000なので、同程度か、それ以上するのではないかと予想します。